多资源公平调度器在Hadoop 中的实现

目前Hadoop的作业调度算法都是将系统中的多类资源抽象成单一资源,分配给作业的资源均是节点资源中固定大小的一部分,称为插槽。这类基于插槽的算法没有考虑到系统多资源的差异性,忽略了不同类型作业对资源的不同需求,因此导致系统在吞吐量和平均作业完成时间上性能低下。本文研究了多资源环境下公平调度算法在Hadoop中的实现,设计了一种多资源公平调度器MFS(Multi-resource Fair Scheduler)。MFS采用了DRF(Dominant Resource Fairness)调度思想,使用需求向量来描述作业对各类资源的需求,并按照需求向量中各资源的大小给作业分配资源。MFS能更加充分有效地使用系统的各类资源,并能满足不同类型作业对资源的不同需求。实验表明相比于基于插槽的Fair Scheduler与Capacity Scheduler,MFS提高了系统的吞吐量,降低了平均作业完成时间。     

一种基于层次的无线传感器网络非均匀分簇路由协议

针对无线传感器网络中由于多跳通信方式导致的"热区"问题,本文提出一种基于层次的非均匀分簇路由协议。本协议先根据节点到达汇聚节点的距离对网络划分层次,然后在每个层次中通过基于权值的竞选方式产生簇头,在权值的选择上综合考虑了节点剩余能量和位置,最后构建多跳传输路由负责簇内和簇间的数据转发。仿真实验表明,本协议能有效地均衡网络负载和延长网络生命周期。     

P2P网络中的超级节点选取算法研究

P2P系统在构建覆盖网络时未考虑到与物理网络的结合,导致逻辑拓扑结构与物理拓扑结构严重不匹配问题,增加P2P相邻节点间的延迟。本文提出一种基于区域划分的超级节点选取机制,将P2P网络中的节点按照物理位置划分成若干区域,保证区域内节点在物理位置上是相近的。利用MATLAB进行仿真实验,仿真实验表明使用这种机制能降低半分布式P2P网络的信息检索延迟,有效地提高检索的效率,并且具有较好的可扩展性。     

长江科学院野外科学观测与科学考察回顾及展望

野外科学观测与科学考察既是基础性科技工作,又是自主创新突破口。近年来,长江科学院设立了野外科学观测中心,初步形成覆盖长江流域,涵盖生态、环境、资源及灾害防治等领域的野外科学观测研究站网体系,持续开展长江流域野外科学观测和多专业综合性科学考察。回顾了长江科学院野外科学观测和科学考察的发展历程,从基础条件、观测成果、科技支撑、骨干队伍以及社会影响等方面,系统总结了长江科学院在野外科学观测与科学考察方面取得的成绩。未来将着重做好基础设施建设、长期观测与考察、科学研究与示范、合作交流以及人才队伍建设等方面工作,以期为长江流域高质量发展提供支撑。     

沙河水库水禽分布及其栖息环境特征分析

2020年3-11月期间对沙河水库开展了水禽多样性监测,并对水禽栖息环境进行了对比分析,监测分析表明:沙河水库低水位运行有效拓展了水禽栖息空间,提升了栖息环境质量,项目区共调查记录到36种水鸟,隶属6目10科,普通鸬鹚、苍鹭、小白鹭和赤麻鸭为优势种,并观测到国家一级重点保护鸟类遗鸥,国家二级重点保护鸟类有白琵鹭、小天鹅、鸿雁和斑头秋沙鸭等;迁徙季单次观测到水禽种类最大达19种,数量达1154只,Shannon-Wiener多样性指数也达到2.17高值,说明沙河水库及周边河段是迁徙水禽如雁鸭类和鹭类的理想停歇地;对比分析提出了适宜水禽栖息的环境特征参数,可作为水禽栖息地营造的参考.     

2020年滁河洪水调度实践与分析

2020年梅雨期安徽省长江、淮河、新安江流域同时发生大洪水,历史罕见。滁河流域属于长江流域,发生超警戒水位洪水,上游襄河口闸以上发生超历史记录水位洪水,历史上第5次启用荒草二圩、荒草三圩蓄洪区分洪蓄水。通过水库蓄水量变化反推水库拦蓄的流量过程和利用各圩区蓄滞水量进行三角形概化反推入圩流量过程并结合水位—流量关系曲线,分析大型水库调度及中型水库拦蓄及启用荒草二圩、荒草三圩在削减洪峰流量、降低洪峰水位发挥的作用,实际降低相应站点水位0.50~1.50 m,有效减轻下游河段防洪压力。     

强力输送带接头识别算法

针对现有的强力输送带故障实时检测方法存在故障定位困难的问题,以接头为基准参考点,提出了一种基于图像处理技术的强力输送带接头识别算法。该算法根据接头点的特征,把接头点用一个数值表示出来,并根据这个数值,以一种简单的方式区分出上、下接头点;然后根据接头的特征,并通过修改最长公共子序列算法的匹配方式,对接头进行识别。实际应用表明,该算法精度高、速度快,可有效识别强力输送带的接头,满足了强力输送带故障检测中接头定位的要求。     

独立发电商的电压安全成本构成分析

电力市场环境下,发电、供电与用电环节分离,各自成为独立的市场主体,其成本投入与经济损失需要各自负担,因此,研究市场环境下的电压安全成本构成需要对各个市场主体的参与情况分别进行讨论和分析。本文针对目前市场上独立发电商无功辅助服务定价所存在的问题,根据已有研究成果,提出一种评估独立发电商电压安全成本的新方法,该方法能有效补偿独立发电商为了维持系统电压安全稳定增加无功出力而大大减少有功出力的经济损失。通过对IEEE-57节点测试系统的仿真结果分析表明,该评估方法不仅可以实现系统总发电成本的最小化,而且能通过经济信号激励独立发电商积极参与维持系统的电压安全稳定运行。     

无线传感器网络中分布式数据挖掘算法研究

研究无线传感器网络中数据挖掘问题.针对大量高维冗余且不确定的无线传感器网络监测数据传送到中央服务器上使用传统的数据挖掘方法进行挖掘的缺点相当明显,导致耗费了珍贵的网络能量.为解决上述问题,提出在每个传感器节点上进行基于粗糙集与遗传BP网络相结合的分布式数据挖掘算法,利用GA来训练BP网络的阈值和权值来构成遗传BP网络(GABP),克服BP网络的某些不足;利用粗糙集RS在消除冗余信息、处理不确定性数据等方面的优势,缩减训练数据输入BP网络的维度.仿真结果表明,改进算法能有效地实现对无线传感器网络中的数据进行分类,取得了较理想的效果.     

卫星导航信号码跟踪精度理论的适用性研究

针对码跟踪精度理论在导航系统信号体制评估中的广泛应用,利用自主研发的卫星导航信号仿真平台对导航跟踪优化的适用条件进行了研究,对不同载噪比环境、前端接收带宽以及超前滞后间距条件下的信号伪距误差进行了测量,将仿真结果与理论结果对比,分析了实际应用中滤波器、鉴别器的非理想特性对信号码跟踪精度所造成的影响.仿真结果表明,在非相干超前滞后(NELP)码跟踪环的条件下,当载噪比较高时,前端接收带宽接近发射带宽,并在超前滞后间距足够小时,计算结果能够较真实的反映信号的性能,并可以为导航信号体制的理论评估以及新型导航信号的设计提供参考.